—— 青亭网
这里有时下最好玩的Oculus Quest手势追踪应用
自从Oculus Quest手势应用SDK开放之后,越来越多的VR手势应用随之而来。虽然,目前来看实际体验效果还并不完美,但是整体应用可玩性和趣味性大大提升。
同时,当然Quest中手势识别自身还处于Beta阶段,因此即便开发者创建了手势应用目前仍不能上架Oculus商店,当前仅能通过SideQuest等第三方平台分发。
接下来,我们先回顾一下Oculus Quest手势追踪技术的发展:
2019年5月,Oculus Quest产品正式开售;
2019年9月,Oculus Connect 6大会公布Quest手势追踪功能;
2019年12月,Oculus Quest手势追踪功能伴随v12系统开放,仅局限于系统应用;
2019年12月,Oculus Quest手势追踪SDK正式开放,开发者们可进行开发或适配相关功能;
2020年2月,Unity插件可通过Oculus Link获取Oculus Quest手势数据。
据青亭网了解,手势追踪功能依赖于Facebook Reality Labs的研究,使用深度学习技术,通过Quest上单色摄像头即可完成手指追踪,无需深度传感器即可识别单手18个骨骼节点。
手势追踪功能目前可部分取代手柄的功能,目前最新系统已经支持未开启手柄自动切换到手势控制模式。相对来看,手势追踪技术能够降低VR手柄学习成本,也无需担心手柄没电等情况,应用到企业培训或教育领域有巨大潜力。
与此同时,上个月我们还发布《这里有最全的Oculus Quest手势追踪设计指南》一文,详解介绍了手势应用开发细节,并通过一些经过验证的开发技巧为开发者带来一些灵感。
在功能尚未正式开放之前,我们先通过一些案例来了解一下,Oculus Quest手势追踪功能的代表性项目。
VR弹吉他
开发者Ricardo Acosta利用业余时间,开发了一款面向Oculus Quest的可通过手势弹吉他的VR应用:《Air Guitar》。
据悉,他本职工作则是在微软,此前也参与VR创作应用《Maquette》开发。而这款应用则是利用下班时间个人独自开发完成的。
https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=m0950v61yj0
《Air Guitar》项目还处于初期阶段,还有存在很多不完美,并未上架SideQuest。但是,这种新颖的方式有着更大的潜力,此前也有类似的手势谈钢琴应用。另外,考虑到这是一款涉及到音乐的游戏,音乐版权也需要考虑到位。
开发者Ricardo Acosta表示:目前正计划将《Air Guitar》项目上线到众筹平台Kickstarter中,之后有消息我们也会持续关注报道。
VR谈钢琴
《VRtuos》是一款支持VR透视模式的弹钢琴应用,现已上架SideQuest。这款应用的特点是结合将虚拟钢琴和真实钢琴进行模型对比,然后在VR中显示滑落音符,VR不会发出声音,而是通过你的真实操作匹配钢琴声音,还原度很高。
https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=a3067xpf7q6
更有趣的是,《VRtuos》在VR内显示了音符滑落过程,内部显示和俄罗斯方块、手游《节奏大师》类似,可以让你知道何时按哪个音符,需要按多久等。
目前它也有一些bug,例如不能进行较大幅度的操作,但显然这给VR乐器学习打开了一个新的方式,随着追踪稳定性的提升,我们能够遇见未来VR手势应用场景将更为广泛。
《Waltz of the Wizard》手势玩法
VR模拟类游戏《Waltz of the Wizard》也展示了加入手势追踪的玩法,从视频来看不仅比用手柄更好玩,游戏对手势的反应识别也足够灵敏。
https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=h3060ygb60o
在视频中,可以看到玩家可用手势点燃烟火、握住魔药瓶、摆弄物品、隔空写字、隔空取物等等,用手势取代手柄后,会让人感觉自己更像是在使用魔法。
目前该作的手势识别功能进行开发调试,同时开发商表示:手势识别是正在探索中的功能,Oculus对于优化手势识别和第三方支持有自己的安排,这也将是决定《Waltz of the Wizard》支持手势识别的较大因素,意味着支持手势几乎还要等一段时间。
VR音乐探索游戏
可视化音乐游戏《Trippy Fingers》是一款主打色彩变化的应用,当你伸出双手后,就会有五彩斑斓的彩色纸屑,而且是随着你的手指移动而变得美轮美奂。
可能你会问,这款游戏和音乐有什么关系?首先,你可以通过手势切换歌曲,例如轻击手指三次即可切换音乐,旋转手指调节音量,将拳头握紧即可暂停播放,整体操作非常有趣,其次场景内颜色变化也会随着音乐而变化。想在VR内放松心情,《Trippy Fingers》再合适不过。
因此,《Trippy Fingers》的魅力就在于将手势追踪、音乐游戏、可视化变幻界面结合,缺一不可。
VR趣味探索应用
开发者Felix Herbst发布一款支持Quest手势识别功能的VR游戏:Interdimensional Matter,目前已上架SideQuest上。该作画风、配乐和玩法都相当无厘头,本质上是一个通过排列对齐物体通关的游戏,不过玩起来似乎并不简单。
在该作中,你需要协调双手去移动物体,在对齐完成后,点击右下角的粉色按钮进行下一关。难点在于,在将物体移动到一个位置后,它甚至还有自己跑掉的可能,并不会完全固定,而且随着关卡越来越难,你会发现排列物体越来越难,而且数量越来越多。与此同时,游戏并不会提示你摆放的是否正确。甚至,即使你只是胡乱摆弄一通,也可以按钮通关。
目前只是一个简单的概念应用,整个游戏体验大约只持续5分钟就能完成。尽管玩法并不简单,但比SideQuest上许多其他游戏对手势追踪的效果要更好。
VR手势悠悠球
个人开发者Daniel Beauchamp,此前公开了一些基于Oculus Quest开发的小Demo,其中包括:VR悠悠球、手掌追踪功能等。
溜溜球可使单个溜溜球,手掌操控流畅,且动作都很自然。同时游戏内的绳子可以通过手势进行交互。甚至还可以将多个溜溜球绑在同一个手掌上,整体的运动轨迹看上去非常自然,比游戏手柄操控看不出太多差别。
Daniel Beauchamp还有另外一些手势项目,例如这个通过两个手指进行滑行的操作就非常有趣,预计后续可以进行更多尝试。
另外,还有一些有趣的VR手势应用本文中并未介绍到,感兴趣的朋友可以在青亭网官网搜索“手势”关键词了解更多。
(END)
推荐阅读
—— 青亭网